📄 health informatics
A statistical framework for evaluating the repeatability and reproducibility of large language models
Este artigo apresenta um quadro estatístico baseado em diretrizes regulatórias para quantificar a repetibilidade e reprodutibilidade de modelos de linguagem grandes em tarefas biomédicas, demonstrando que essas métricas variam conforme o modelo e a estratégia de prompt, e que a consistência na geração de respostas não garante necessariamente a precisão diagnóstica.
Shyr, C., Ren, B., Hsu, C.-Y., Yan, C., Tinker, R. J., Cassini, T. A., Hamid, R., Wright, A., Bastarache, L., Peterson (…)2026-03-25